Từ Thức buồn rầu, muốn lại ngồi lên xe tiên để đi, thì xe đã hóa thành chim loan bay đi mất rồi. Mở bức thư của Giáng Hương ra xem, chàng chỉ thấy có dòng chữ: "Ở nơi tiên cảnh, cùng nhau kết bạn, nay duyên xưa đã hết, không còn mong hội ngộ".

Về sau, người ta thấy Từ Thức đội cái nón nhỏ vào núi Hoàng Sơn (thuộc huyện Nông Cống, Thanh Hóa) không thấy trở về nữa.